其他
几千万记录,数据库表结构如何平滑变更? | 答水友问
问题域:数据量大、并发量高场景,如何在流量低峰期,平滑实施表结构变更?
(1)如果是减column,升级程序不使用即可;
(2)如果是修改column,程序兼容性容易出问题;
首先,一起看下有哪些常见方案。
画外音:alter table add column
t_user(uid, c1, c2, c3)
想要扩展属性,可以通过增加一个表实现:
t_user_ex(uid, c4, c5, c6)
数据量大的情况下,join性能较差,一般不可行。
画外音:至少58到家禁止使用视图《58到家MySQL军规升级版》。
方案五,提前预留一些reserved字段,加列可复用这些字段。
方案六,pt-online-schema-change
画外音:我呆过的互联网公司,数据库均使用MySQL。
下面仍以用户表扩展为例,说下这个工具内部的原理与步骤。
假设:
user(uid, name, passwd)
user(uid, name, passwd, age, sex)
第一步,先创建一个扩充字段后的新表:
user_new(uid, name, passwd, age, sex)
画外音:就是被扩展后的表。
第二步,在原表user上创建三个触发器,对原表user进行的所有insert/delete/update操作,都会对新表user_new进行相同的操作;
第四步,删掉触发器,把原表移走(默认是drop掉);
第五步,把新表user_new重命名(rename)成原表user;
扩充字段完成,整个过程不需要锁表,可以持续对外提供服务。
(3)触发器的建立,会影响原表的性能,所以这个操作必须在流量低峰期进行;
相关文章:
《58到家MySQL军规升级版》
调研:贵司是如何扩展表结构的?